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= (54) Title: METHOD AND DEVICE FOR ADJUSTING AN IMAGE SENSOR SYSTEM 

(54) Bezeichnung: VERFAHREN UND EINE VORRICHTUNG ZUR EINSTELLUNG EINES BILDSENSORSYSTEMS 

= (57) Abstract: The invention relates to a method 

and a device for adjusting at least one parame- 
ter of an image sensor of a stereo camera in a 
motor vehicle. Said stereo camera is constituted 
of two image sensors that record essentially the 
same scene. When a malfunction occurs in one 
of the image sensors, at least one parameter of the 
corresponding image sensor is adjusted depend- 
ing on at least one measuring value of the image 
sensor of the image sensor system which is in 
perfect condition. In a preferred embodiment of 
the invention, the parameter is at least one bright- 
ness parameter of the image sensor. If a malfunc- 
tion of the image sensor of the stereo camera oc- 
curs, the at least one brightness parameter is ad- 
justed depending on the at least one measuring 
value of the second image sensor, the measuring 
value representing a measure of the brightness of 
at least a part of the image of the second image 
sensor. 
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(57) Zusammenfassung: Es werden ein 
Verfahren imd eine Vorrichtung zur Einstellung 
wenigstens eines Parameters eines Bildsensors 
einer Stereokamera in einem Kraftfahrzeug 
vorgeschlagen. EHe Stereokamera besteht aus 
zwei Bildsensoren, die im wesendichen dieselbe 
Szene aufnehmen. Beim Auftreten eines Fehlers 
bei einem der Bildsensoren wird wenigstens ein 
Parameter dieses Bildsensors in Abhangigkeit 
wenigstens eines Messwertes des fehlerfreien 
Bildsensors des Bildsensorsystems eingestellt 
Im 

[Fortsetzung auf der ndchsten SeiteJ 
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Zur Erkldrung der Zweibuchstaben-Codes und der anderen Ab- 
kurzungen wird auf die Erkldrungen ("Guidance Notes on Co- 
des and Abbre\nations") am Anfang jeder reguldren Ausgabe der 
PCT -Gazette verwiesen. 
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bevorzugten Ausfuhrungsbei spiel ist der Parameter wenigstens ein Belichtungsparameter des Bildsensors. Im Fehlerfall eines Bild- 
sensors der Stereokamera wiid der wenigstens eine Belichtungsparameter in Abhangigkeit wenigstens eines Messwertes des zweiten 
Bildsensors eingestellt, wobei der Messwert ein Mass fur die Belichtung wenigstens eines Teils des Bildes des zweiten Bildsensors 
ist. 
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Verfahren und Vorrichtung zur Einstellung eines Bildsensorsvstems 
Stand der Technik 

Die Erfindung betrifft ein Verfahren und cine Vorrichtung zur Einstellung wenigstens eines 
Parameters wenigstens eines Bildsensors eines Bildsensorsystems, wobei das Bildsensorsystem 
aus wenigstens zwei Bildsensoren besteht. 

Bildsensorsysteme mit wenigstens zwei Bildsensoren, die im wesentlichen dieselbe Szene 
au&ehmen, sind bekannt. Solche Bildsensorsysteme werden auch als „Stereokamera'^ 
bezeichnet. Beispielsweise ist aus der europMischen Patentanmeldung EP 1 028 387 A2 eine 
Umfelderkennungseinrichtung in einem Kraflfahrzeug mit einer Stereokamera bekannt Die 
Stereokamera weist zwei Bildsensoren mit uberlappenden Gesichtsfeldem auf. Es wird 
vorgeschlagen, generierte Umfeldbilddaten der beiden Bildsensoren zur Detektion von 
Verkehrszeichen zu verwenden. Dem Fahrer des Kraflfahrzeuges werden die erkannten 
Verkehrszeichen uber ein Head-up-Display angezeigt. Die Stereokamera ist damit eine 
Komponente eines Fahrerassistenzsystems zur Anzeige von Verkehrszeichen im Kraflfahrzeug. 
Fahrerassistenzsysteme sind Systeme in einem Kraftfahrzeug, die den Fahrer im 
StraBenverkehrs durch die Bereitstellung von Fahrerassistenzfunktionen unterstutzen. Die 
zuverlassige Funktion der Fahrerassistenzsysteme und dessen Komponenten verbunden mit 
einer hohen Verfugbarkeit sind die Voraussetzungen fur den Einsatz dieser Systeme in einem 
Kraftfahrzeug. Hinweise auf ein Verfahren und eine Vorrichtung zur Erreichuhg einer hohen 
Verfugbarkeit eines Bildsensorsystems mit wenigstens zwei Bildsensoren, die im wesentlichen 
dieselbe Szene aufiiehmen, fehlen in der EP 1 028 387 A2. 
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Vorteile der Erfindung 

Das nachfolgend beschriebene Verfahren und die Vorrichtung zur Einstellung wenigstens eines 
Parameters wenigstens eines Bildsensors eines Bildsensorsystems, wobei das Bildsensorsystem 
aus wenigstens zwei Bildsensoren besteht, die im wesentlichen dieselbe Szene aufiiehmen, 
haben den Vorteil, dass die Fehlertoleranz des Bildsensorsystems erhoht wird. In besonders 
vorteilhafter Weise tragt dies allgemein zu einer hohen Verfiigbarkeit des Bildsensorsystems, 
insbesondere der beschriebenen Stereokamera, bei, Beim Auftreten eines monokularen Fehlers, 
also eines Fehlers in nur einem Bildsensor des Bildsensorsystems, fallt das Bildsensorsystem 
nicht zwangsl^ufig aus. Wahrend der Betriebsdauer tragen das Verfahren und die Vorrichtung 
damit zur Senkung der Ausfallzeiten und damit zur ErhShung der Verfiigbarkeit bei. 

Besonders vorteilhaft ist das nachfolgend beschriebene Verfahren und die Vorrichtung in 
Kraftfahrzeugen. Bildsensorsysteme in Kraftfahrzeugen werden in Fahrerassistenzsystemen 
und/oder in sicherheitsrelevanten Systemen eihgesetzt. Beispielsweise ist geplant, 
Bildsensorsysteme zur Erkennung von Unfallgefahren einzusetzen und abhangig von der 
erkannten Gefahrensituation Sicherheitseinrichtungen, wie Airbags und/oder Gurtstraffer, auf 
die m5glich Unfallgefahr vorzubereiten. Dies erm5glicht einen gezielten und schnelleren 
Einsatz dieser Sicherheitseinrichtungen. Beim Einsatz von Bildsensorsystemen in solchen 
sicherheitsrelevanten Systemen wird deshalb eine hohe Verfiigbarkeit benotigt. Das 
beschriebene Verfahren und die Vorrichtung tragen in besonders vorteilhafter Weise zu einer 
hohen Verfiigbarkeit eines Bildsensorsystems in Kraftfahrzeugen bei. Vorteilhaft ist auch, dass 
die Verfiigbarkeit des Bildsensorsystems gerade bei schwierigen Fahrsituationen, wie Regen, 
erh5ht wird. Bei solch schwierigen Fahrsituationen ist eine besonders hohe Unfallgefahr 
vorhanden und es ist wichtig, dass das Bildsensorsystem eine hohe Verfiigbarkeit in diesen 
Fahrsituationen aufweist. Aber auch beim Einsatz von Bildsensorsystemen in 
Fahrerassistenzsystemen tragen das nachfolgend beschriebene Verfahren und die Vorrichtung in 
vorteilhafter Weise zur ErhQhung der Verfiigbarkeit der Fahrerassistenzfunktionen in 
schwierigen Fahrsituationen bei. Dies ist deshalb vorteilhaft, da viele Fahrerassistenzfunktionen 
gerade fiir den Einsatz in schwierigen Fahrsituationen konzipiert sind und dort vom Fahrer 
ben5tigt werden. 

Bei der Einstellung wenigstens eines Belichtungsparameters wird in vorteilhafter Weise eine 
verbesserte Fehlertoleranz der Belichtungseinstellung der Bildsensoren erreicht, da beim 
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Vorliegen eines Fehlers in wenigstens einexn Bildsensor die Bildsensoren nur mit der 
fehlerfreien Belichtungsinformation wenigstens eines weiteren Bildsensors eingestellt werden. 
Besonders vorteiihaft ist, wenn als Parameter der Gain und/oder der Offset und/oder die 
Integrationszeit des wenigstens einen Bildsensors verwendet wird. Diese Parameter sind fiir 
5 eine automatische Belichtungseinstellung und die nachfolgend beschriebene Umschaltung der 

Belichtungseinstellung auf wenigstens einen fehlerfreien Bildsensor besonders geeignet. Unter 
dem Gesichtspunkt der automatischen Einstellung und/oder Regelung und/oder Steuerung der 
Belichtung besitzt eine Stereokamera eine besondere Eigenschaft: Der Belichtungssensor, d. h. 
der Bildsensorchip, auf dem beispielsweise die Belichtungsregelung beruht, ist zweimal 
1 0 vorhanden. Besonders vorteiihaft ist dabei, dass bei einer Stereokamera die beiden Bildsensoren 

im wesentlichen dieselbe Szene aufiiehmen und damit die gewonnenen 
Belichtungsinformationen der beiden Bildsensoren im wesentlichen gleich sind. Diese 
Redundanz kann im Fehlerfall genutzt werden, indem nur auf Belichtungsinformationen aus 
dem jeweils fehlerjfreien Bildsensor zuriickgegriffen wird. 

15 

Bin weiterer Vorteil des nachfolgend beschriebenen Verfahrens und der Vorrichtung ist, dass als 
Fehlertyp wenigstens ein Bildfehler und/oder wenigstens ein Hardwarefehler erkannt wird. Es 
ist damit mdglich, nicht nur Bildfehler zu erkennen, sondem auch Fehler in der Hardware zu 
detektieren. Damit tragt das Verfahren und die Vorrichtung in vorteilhafler Weise zu einer 
2 0 hohen Verfiigbarkeit des Bildsensorsystems bei, auch wenn ein Storfall in Form wenigstens 

eines Hardwarefehlers in einem Bildsensor auftritt. 



Besonders vorteiihaft ist eine Verarbeitungseinheit zur Erzeugung wenigstens eines 
Einstellsignals fiir wenigstens einen Parameter wenigstens eines Bildsensor eines 
2 5 Bildsensorsystems zur Durchfuhrung aller oder zumindest der wesentlichen Schritte des 

nachfolgend beschriebenen Verfahrens. Die Vorteile eines solchen Verarbeitungseinheit sind 
die oben beschriebenen Vorteile des Verfahrens und der Vorrichtung zur Einstellung wenigstens 
eines Parameters wenigstens eines Bildsensors eines Bildsensorsystems. 

30 Besonders vorteiihaft ist ein Computerprogramm mit Programmcode-Mitteln, um alle Schritte 

oder zumindest die wesentlichen Schritte des beschriebenen Verfahrens durchzufiihren, wenn 
das Programm auf einem Computer ausgefuhrt wird. Die Verwendung eines 
Computerprogramms ermoglicht die schnelle und kostengunstige Anpassung des Verfahrens, 
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beispielsweise durch Anpassung an unterschiedliche Bildsensortypen. Altemativ oder zusatzlich 
ist die einfache Aufnahme weiterer Fehlertypen moglich. 

Weitere Vorteile ergeben sich aus der nachfolgenden Beschreibung von Ausfiihrungsbeispielen 
mit Bezug auf die Figuren und aus den abhSngigen Patentanspiiichen. 



Die Erfindung wird nachstehend anhand der in der Zeichnung dargestellten Ausfuhrungsformen 
naher erllutert. Die einzige Figur 1 zeigt ein €l>ersichtsbild des bevorzugten 
Ausfuhrungsbeispiels. 

Beschreibung von Ausfiihrungsbeispielen 

Nachfolgend werden ein Verfahren und eine Vorrichtung zur Einstellung wenigstens eines 
Parameters eines Bildsensors einer Stereokamera in einem Kraftfahrzeug beschrieben. Die 
Stereokamera besteht aus zwei Bildsensoren, die im wesentlichen dieselbe Szene aufiiehmen. 
Beim Auftreten eines Fehlers bei einem der Bildsensoren wird wenigstens ein Parameter dieses 
Bildsensors in Abhtogigkeit wenigstens eines Messwertes des fehlerfreien Bildsensors des 
Bildsensorsystems eingestellt. Im bevorzugten Ausfuhrungsbeispiel ist der Parameter 
wenigstens ein Belichtungsparameter des Bildsensors. Im Fehlerfall bzw. Stdrfall eines 
Bildsensors der Stereokamera wird der wenigstens eine Belichtungsparameter in Abhangigkeit 
wenigstens eines Messwertes des zweiten Bildsensors eingestellt, wobei der Messwert ein MaB 
fiir die Belichtung wenigstens eines Teils des Bildes des zweiten Bildsensors ist. 

Figur 1 zeigt ein Obersichtsbild des bevorzugten Ausfuhrungsbeispiels, bestehend aus einem 
ersten Bildsensor 10, einem zweiten Bildsensor 20 und einer Verarbeitungseinheit 30 mit 
verschiedenen Modulen 32, 34, 36, 38. Der erste Bildsensor 10 und der zweite Bildsensor 20 
sind so angeordnet, dass sie im wesentlichen dieselbe Szene aufnehmen. Im bevorzugten 
Ausfuhrungsbeispiel bilden der erste Bildsensor 10 und der zweite Bildsensor 20 eine 
sogenannte Stereokamera. Bei einer Stereokamera nehmen die beiden Bildsensoren 10, 20 nicht 
nur im wesentlichen dieselbe Szene auf, sondem die optischen Achsen der beiden Bildsensoren 
10, 20 sind zusatzlich im wesentlichen parallel. Der erste Bildsensor 10 und der zweite 
Bildsensor 20 sind im bevorzugten Ausfuhrungsbeispiel im gegenseitigen horizontalem Abstand 
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von etwa 0,2 m hinter der Windschutzscheibe im Bereichen des Innenriickspiegels eines 
Kraftfahrzeuges montiert. Die beiden Bildsensoren 10, 20 sind so ausgerichtet, dass ihr 
Bilderfassungsbereich die Umgebung des Kraftfahrzeuges in Fahrtrichtung abdeckt. In diesem 
AusfUhrungsbeispiel wird die Belichtung des Stereokamerapaares eingesteilt. Beim Auftreten 
eines Fehlers in einem der Bildsensoren 10, 20 wird die Belichtungsinformation fiir beide 
Bildsensoren 10, 20 gemeinsam jeweils nur aus dem Bild des fehlerj&eien Bildsensors 10, 20 
gewonnen, wahrend die irrefuhrende Belichtungsinformation des gest5rten Bildsensors 10, 20 
unberucksichtigt bleibt. Falls beispielsweise im ersten Bildsensor 10 ein Fehler auftritt, wird die 
Belichtung der beiden Bildsensoren 10, 20 in Abhangigkeit der Belichtungsinformationen des 
zweiten Bildsensors 20 eingesteilt. Hierzu fmdet ein automatisches Umschalten der Einstellung 
des Bildsensors 10, 20 auf den jeweils fehlerfreien Bildsensor 10, 20 zur Gewinnung der 
Belichtungsinformation statt. Dazu ist ein Mechanismus zur automatischen Detektion von 
Fehlerbedingungen in den beiden Bildsensoren 10, 20 vorhanden. Die Fehlerbedingungen 
k5nnen sowohl durch Oberwachungsfunktionen der Hardware als auch durch Analyse der 
Bilder der Bildsensoren 10, 20 auf Bildfehler gewonnen werden. Wird in einem der 
Bildsensoren 10, 20 ein Fehler detektiert, so wird die Belichtungsinformation flir beide 
Bildsensoren 10, 20 nur auf Basis des fehlerfreien Sensors gewonnen. Arbeiten beide 
Bildsensoren 10, 20 fehlerirei, so werden entweder beide Bildsensoren 10, 20 individuell oder 
gemeinsam eingesteilt. Im bevorzugten Ausfiihnmgsbeispiel werden CMOS-Bildsensoren mit 
logarithmischer Belichtungskennlinie verwendet, die Grauwert-Bilder mit einer Auflosung von 
8 Bit erzeugen. Ober die Signalleitung 12 UbertrSgt der erste Bildsensor 10 
tJberwachungssignale zur Fehleniberwachung an das Modul 32. In analoger Weise werden ilber 
die Signalleitung 22 tJberwachungssignale von dem zweiten Bildsensor 20 an das Modul 34 
ubertragen. Als tJberwachungssignale werden im bevorzugten AusfUhrungsbeispiel Bildsignale 
und verschiedene Hardwaresignale der Bildsensoren 10, 20 ubertragen. In den Modulen 32, 34 
zur Fehlerdetektion werden aus den iiber die Signalleitungen 12, 22 ubertragenen 
tJberwachungssignalen Fehler in den beiden Bildsensoren 10, 20 erkannt. Uber die 
Signalleitung 33 tibertrSgt das Modul 32 zur Fehlerdetektion Fehlersignale an das Modul 36 zur 
Bsldsensorschaltung. In analoger Weise werden iiber die Signalleitung 35 Fehlersignale vom 
Modul 34 zur Fehlerdetektion an das Modul 36 zur Bildsensorschaltung ubertragen. Im Modul 
36 zur Bildsensorschaltung tritt je nach Vorliegen einer detektierten Fehlerbedingung in den 
beiden Bildsensoren 10, 20 einer von drei nachfolgend erlauterten Fallen auf. Im ersten Fall 
arbeiten beide Bildsensoren 10, 20 fehlerirei und iiber die Signalleitungen 33, 35 werden keine 
Fehlersignale an das Modul 36 ubertragen. Altemativ ist es mSglich beide Bildsensoren 10, 20 
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entweder gemeinsam oder einzeln individuell einzustellen. Bei einer gemeinsamen Einstellung 
werden die Belichtungsinformationen aus beiden Bildsensoren 10, 20 gemittelt oder in einem 
gemeinsamen Grauwerthistogramm beider Bilder zusammengefasst. Die 
Belichtungsinformationen werden im bevorzugten Ausfuhrungsbeispiei im Modul 38 zur 
5 Bildsensoreinstellung aus den Bildinformationen gewonnen, die von dem ersten Bildsensor 1 0 

uber die Signalleitung 16 und von dem zweiten Bildsensor 20 Ober die Signalleitung 26 an das 
Modul 36 zur Bildsensorschaltung und weiter uber die Signalleitung 37 an das Modul 38 zur 
Bildsensoreinstellung Ubertragen werden. Bei der individuellen Einstellung werden die 
Bildsensoren 10, 20 entweder nur mit Hilfe der Belichtungsinformation einer der beiden 

10 Bildsensoren 10, 20 oder jeder Bildsensor 10, 20 wird mit den eigenen 

Belichtungsinformationen eingestellt. Im zweiten Fall wird in einem der beiden Bildsensoren 
10, 20 ein Fehler detektiert. Dieser Fehler wird iiber eine Signalleitungen 33, 35 von dem 
entsprechenden Modul 32, 34 zur Fehlerdetektion an das Modul 36 zur Bildsensorschaltung 
Ubertragen. In diesem Fall wird im Modul 38 nur die Belichtungsinformation des fehlerfreien 

15 Bildsensors 10, 20 zur Einstellung beider Bildsensoren 10, 20 verwendet. Beispielsweise wird 

beim Vorliegen eines Fehlers im ersten Bildsensor 10 Bildinformationen des zweiten 
Bildsensors 20 ilber die Signalleitung 26 durch das Modul 36 zur Bildsensorschaltung weiter an 
das Modul 38 zur Bildsensoreinstellung ubertragen. Wird in beiden Bildsensoren 10, 20 
gleichzeitig ein Fehler detektiert liegt der dritte Fall vor. Handelt es sich um einen kurzzeitigen 

2 0 AusreiBer, so wird die momentane Belichtungsinformation vom Modul 38 zur 

Bildsensoreinstellung ignoriert und die Belichtungseinstellung lauft „blind" weiter. Die 
Einstellung wird also mit den zuletzt ermittelten Werten weitergefiihrt, bis normale 
Beleuchtungsverhaltnisse auftreten und/oder bis wenigstens in einem Bildsensor 10, 20 der 
Fehler wegf^Ut und die Belichtungsinformationen wenigstens eines Bildsensors 10, 20 wieder 

25 zur Belichtungseinstellung verwendet werden k5nnen. Besteht die beidseitige St5rung linger, so 

mussen andere MaBnahmen ergriffen werden. Im bevorzugten Ausfuhrungsbeispiei erfolgt 
entweder eine Wamung an den Benutzer, also den Fahrer des Kraftfahrzeuges, und/oder das 
System wird abgeschaltet. Im Modul 38 wird die eigentliche Belichtungseinstellung der 
Bildsensoren 10, 20 berechnet. Hierzu werden aus den Bildinformationen, die uber die 

30 Signalleitung 37 ubertragen werden, Einstellsignale erzeugt. Die Einstellsignale werden uber die 

Signalleitung 14 an den ersten Bildsensor 10 und uber die Signalleitung 24 an den zweiten 
Bildsensor 20 Ubertragen. Die Einstellsignale sind im bevorzugten Ausfuhrungsbeispiei Signale 
zur Einstellung wenigstens eines Parameters der Belichtung. Als Parameter der Belichtung wird 
die elektrische Verstarkung (Gain) und/oder der Offset und/oder die Integrationszeit verwendet. 
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Im bevorzugten Ausfiihrungsbeispiel wird die Belichtungsinformation aus der 
Grauwerteverteilung der iibeitragenen Bildinformationen bestimmt. Als Belichtungsinformation 
wird beispielsweise der Mittelwert der Grauwerte und/oder ein statistischer Wert, insbesondere 
der Median und/oder das Maximum und/oder das Minimum und/oder die Quantile, des 
Histogramms der Grauwerte der Bildinformationen verwendet. 

Die einzelnen Module 32, 34, 36, 38 der Verarbeitungseinheit 30 sind in dem bevorzugten 
Ausfiihrungsbeispiel in einem digitalen Mikroprozessor implementiert, der die beschriebenen 
Funktionen dieser Module 32, 34, 36, 38 als Programme, Programmteile oder Programmschritte 
realisiert. In einer anderen Variante sind wenigstens zwei Mikroprozessoren vorgesehen, auf 
welche die einzelnen Module 32, 34, 36, 38 verteilt sind. Die tJbertragung der Signale auf den 
Signalleitungen 12, 14, 16, 22, 24, 26, 33, 35, 37 erfolgt elektrisch und/oder optisch. Altemativ 
oder zus^tzlich ist eine Obertragung per Funk mdglich. In einer weiteren Variante des 
bevorzugten Ausfuhrungsbeispiels sind die beiden Bildsensoren 10, 20 und die 
Verarbeitungseinheit 30 zu einer Einheit zusammengefiigt. 

Die Module zur Fehlerdetektion fiif die Bildsensoren detektieren Fehler bestimmter 
Fehlertypen. Dabei wird zwdschen zwei Fehlertypen unterschieden: Hardwarefehler und 
Bildfehler. Durch Detektionsschaltungen werden Ausfalle von Hardwarekomponenten der 
Bildsensoren erkannt. Hardwarekomponenten sind hierbei insbesondere die elektronischen 
Bauteile zur Umwandlung des Lichtsignals in ein elektrisches Signal, beispielsweise wenigstens 
ein Bildsensorchip, und/oder die Auswerteelektronik mit Mikroprozessoren und Speicher im 
Bildsensor. Detektionsschaltungen sind elektronische Schaltungen, die beim Auftreten eines 
Fehlers in einer zu iiberwachenden Schaltung ein Fehlersignal erzeugen. Unter den Fehlertyp 
Hardwarefehler fallen auch Fehler bei der Konununikation zwischen dem Bildsensorchip und 
der Auswerteelektronik. Die Kommunikation ist h^ufig Uber ein BusprotokoU mit einer 
entsprechenden Fehlerdetektion realisiert. Ein weiterer Hardwarefehler ist der Ausfali einzelner 
Bitplanes. Dieser Ausfall zeigt sich typischerweise dadurch, dass ein Bit iiber das gesamte Bild 
entweder nur auf 1 oder nur auf 0 steht. Uber eine entsprechende Oberpriifung hinreichend 
vieler Bits eines Bildes wird das Vorliegen eines solchen Bilplane-Fehlers festgestellt. Der 
zweite Fehlertyp sind Bildfehler. Unter dem zweiten Fehlertyp Bildfehler werden insbesondere 
Belichtungsfehler und/oder Fehler durch Kontrastverluste und/oder stark verrauschte Bilder 
verstanden. Die Erkennung von Belichtungsfehlem erfolgt beispielsweise uber die Auswertung 
des Histogramms eines Bildes. Bei einer Uberbelichtung bzw. Unterbelichtung tritt eine 
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Haufung von Grauwerten am oberen bzw. unteren Wertebereich des Histogramms auf. 
Kontrastverluste treten beispielsweise bei einer Verdeckung eines Bildsensors auf. Aus dem 
Automobilbereich sind solche monokularen Fehlerfalle bekannt. Wenn eine Stereokamera hinter 
der Windschutzscheibe betrieben wird und gleichzeitig der Scheibenwischer aktiv ist, dann 
5 deckt der Scheibenwischer regelm^ig immer wieder eine der beiden Bildsensoren kurzzeitig 

ab. Dies fuhrt zu einer zeitweiligen, storenden Abweichung der Belichtungseinstellung der 
Bildsensoren. Insbesondere werden hierdurch die oben erwahnten Belichtungsfehler und/oder 
Kontrastverluste verursacht. Ein dynamisches Umschalten der Bildsensoreinstellung auf den 
jeweils unverdeckten Bildsensor tragt zur Verhinderung eines solchen unerwttnschten 

1 0 Verhaltens bei. Stark verrauschte Bilder treten beispielsweise bei erhohter Betriebstemperatur 

und/oder bei Betriebsfehler und/oder Kommunikationsfehlem des Bildsensorchips auf. Unter 
die Kategorie Bildfehler fallen auch Fehler durch AusreiBerbilder. Unter Ausreifierbildem 
werden isoliert auflretende Bildstdrungen und/oder Belichtungsanderungen und/oder 
Verdeckungen verstanden, die jeweils nur wenige aufeinanderfolgende Bilder betreffen. 

15 Bildstorungen treten beispielsweise bei Wackelkontakten in den elektronischen Schaltungen der 

Bildsensoren auf, wMhrend Belichtungsanderungen beispielsweise bei kurzzeitigen 
Einstreuungen durch Reflektionen starker Lichtquellen auftreten. Eine Einstreuung von 
Reflektionen wird bei Bildsensoren in fCraftfahrzeugen beispielsweise durch Scheinwerfer 
anderer Kraftfahrzeuge verursacht. Verdeckungen im Bild eines Bildsensors einer Stereokamera 

20 treten in einem Kraftfahrzeug beispielsweise durch den oben erwahnten Fall des 

Scheibenwischers aiif. Solche AusreiBbilder werden beispielsweise uber pradiktive Verfahren 
und/oder Uber ermittelte UnterschiedsmaBe zwischen momentanem und vergangenem Bild 
detektiert. Cberschreitet der Unterschied zwischen momentanem und vergangenem Bild eine 
vorher festgelegte Schwelle, so wird das momentane Bild als AusreiBerbild gewertet. Weiterhin 

2 5 fallen Fehler durch unscharfe Bilder ebenfalls unter den Fehlertyp Bildfehler. Unscharfe Bilder 

entstehen beispielsweise durch Sichtbeeintr^chtigungen der Bildsensoren durch Regen und/oder 
Schmutz und/oder Spritzwasser und/oder Defokussierung. Das Vorliegen eines einseitigen 
Fehlers in einem der Bildsensoren kann durch Vergleich zwischen dem rechten und dem linken 
Bild der Stereokamera verifiziert werden. Normalerweise ist der Unterschied zwischen dem 

30 rechten und dem linken Bild relativ gering. Tritt nun ein Fehler in nur einem der Bildsensoren 

auf, so wird im allgemeinen auch der Fehler zwischen den beiden Bildem vergroBert. 



Das beschriebene Verfahren und die Vorrichtung zur Einstellung wenigstens eines Bildsensors 
eines Bildsensorsystems, wobei das Bildsensorsystem aus wenigstens zwei Bildsensoren 
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besteht, die im wesentlichen dieselbe Szene aufnehmen, sind nicht auf die Einstellung 
wenigstens eines Belichtungsparameters beschrSnkt. Das beschriebenen Verfahren und die 
Vorrichtung ist allgemein zur Einstellung und/oder Steuerung und/oder Regelung wenigstens 
eines Parameters wenigstens eines Bildsensors eines Bildsensorsystems geeignet, wobei das 
Bildsensorsystem aus wenigstens zwei Bildsensoren besteht, die im wesentlichen dieselbe 
Szene aufnehmen. Neben der Einstellung wenigstens eines Belichtungsparameters ist 
beispielsweise die Einstellung und/oder Steuerung und/oder Regelung wenigstens eines 
Fokussierungsparameters moglich. Bei modemen Bildsensoren wird die Fokussierung des 
Bildes automatisch durch einen Autofokus eingestellt. Als Fokussierungsparameter wird 
beispielsweise die Brennweite der Bildsensorlinse verwendet. Altemativ oder zusatzlich werden 
in weiteren Varianten als Parameter wenigstens eines Bildsensors die Blende (Iris) eingestellt. 
Bei Bildsensoren mit Farbwiedergabe wird in einer weiteren Variante altemativ oder zusatzlich 
als Parameter der WeiBabgleich durchgefflhrt. Altemativ oder zusatzlich wird in einer weiteren 
Variante die Belichtungsempfmdlichkeit des Bildsensors eingestellt. Beispielsweise wird in 
einer besonderen AusfUhmngsform die Belichtungsempfmdlichkeit des Bildsensors durch 
Einstellung der Knickpunkte bei einer abschnittsweise linearen Kennlinie eingestellt. In einer 
weiteren Variante werden wenigstens zwei unterschiedliche Par^eter wenigstens eines 
Bildsensorsystems durch das beschriebene Verfahren und die Vorrichtung parallel eingestellt. 
Beim Auftreten wenigstens eines Fehlers wenigstens eines Fehlertyps bei wenigstens einem 
Bildsensor werden die wenigstens zwei unterschiedlichen Parameter dieses Bildsensors in 
Abhangigkeit wenigstens eines Messwertes wenigstens eines weiteren Bildsensors des 
Bildsensorsystems eingestellt. 

In einer Variante des beschriebenen Verfahrens und der Vorrichtung wird ein Bildsensorsystem 
verwendet, das aus mehr als zwei Bildsensoren besteht, die im wesentlichen dieselbe Szene 
aufiiehmen. Altemativ oder zusatzlich wird in einer weiteren Variante wenigstens ein 
Bildsensor mit linearer Kennlinie verwendet. Die eingesetzten Bildsensoren sind nicht 
beschrankt auf schwarz-weiB Bildsensoren. Vielmehr ist die Verwendung von Bildsensoren in 
unterschiedlichen AusfiJhrungen in bezug auf die Aufl5sung und/oder die Farbtiefe und/oder die 
Charakteristik der Belichtungskennlinie mOglich. Altemativ oder zusatzlich konnen CCD- 
Bildsensoren in unterschiedlichen Ausfuhrungen in bezug auf die Auflosung und/oder die 
Farbtiefe und/oder die Charakteristik der Belichtungskennlinie verwendet werden. Allgemein 
sind das beschriebene Verfahren, die Vorrichtung, die Verarbeitungseinheit und das 
Computerprogramm nicht auf den Einsatz in Kraftfahrzeugen beschrankt. 
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Anspriiche 



1. Verfahren zur Einstellung wenigstens eines Parameters wenigstens eines Bildsensors eines 
Bildsensorsystems, insbesondere in einem Kraftfahrzeug, wobei das Bildsensorsystem aus 
wenigstens zwei Biidsensoren besteht, die im wesentlichen dieselbe Szene aufhehmen, 
dadurch gekennzeichnet, dass beim Auftreten wenigstens eines Fehlers wenigstens eines 
Fehlertyps bei wenigstens einem Bildsensor wenigstens ein Parameter dieses Bildsensors in 
Abhangigkeit wenigstens eines Messwertes wenigstens eines weiteren Bildsensors des 
Bildsensorsystems eingestellt wird. 

2. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass der wenigstens eine Parameter 
wenigstens ein Belichtungsparameter ist, insbesondere dass der wenigstens eine Parameter 
der Gain und/oder der Offset und/oder die Integrationszeit ist. 

3. Verfahren nach einem der vorhergehenden Anspriiche, dadurch gekennzeichnet, dass der 
wenigstens eine Messwert ein MaB fiir die Belichtung wenigstens eines Teils des Bildes des 
wenigstens einen weiteren Bildsensors ist. 

4. Verfahren nach einem der vorhergehenden Anspriiche, dadurch gekennzeichnet, dass der 
wenigstens eine Fehlertyp wenigstens ein Bildfehler und/oder wenigstens ein 
Hardwarefehler ist. 

5. Vorrichtung zur Einstellung wenigstens eines Parameters wenigstens eines Bildsensors 
eines Bildsensorsystems, insbesondere in einem Kraftfahrzeug, wobei das Bildsensorsystem 
aus wenigstens zwei Biidsensoren besteht, die im wesentlichen dieselbe Szene aufhehmen. 
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dadurch gekennzeichnet, dass eine Verarbeitungseinheit beim Auftreten wenigstens eines 
Fehlers wenigstens eines Fehlertyps bei wenigstens einem Bildsensor wenigstens einen 
Parameter dieses Bildsensor in Abhangigkeit wenigstens eines Messwertes wenigstens eines 
weiteren Biidsensors des Bildsensorsystems einstellt. 

6. Vorrichtung nach Anspruch 5, dadurch gekennzeichnet, dass die Verarbeitungseinheit 
wenigstens einen Belichtungsparameter, insbesondere den Gain und/oder den Offset 
und/oder die Integrationszeit, in Abhangigkeit wenigstens eines Messwertes einstellt, wobei 
der Messwert ein MaB fiir die Belichtung wenigstens eines Teils des Biides des wenigstens 
einen weiteren Biidsensors ist. 

7. Verarbeitungseinheit zur Erzeugung wenigstens eines Einstellsignals fttr wenigstens einen 
Parameter wenigstens eines Biidsensors eines Bildsensorsystems, insbesondere in einem 
Krafifahrzeug, wobei der Verarbeitungseinheit wenigstens zwei unterschiedliche Bilder 
zugeleitet werden, die im wesentlichen dieselbe S2;ene reprasentieren, dadurch 
gekennzeichnet, dass die Verarbeitungseinheit das Auftreten wenigstens eines Fehlers 
wenigstens eines Fehlertyps bei wenigstens einem Bildsensor des Bildsensorsystems 
Uberwacht und beim Auftreten wenigstens eines Fehlers bei wenigstens einem Bildsensor 
des Bildsensorsystems wenigstens ein Einstellsignal fur wenigstens einen Parameter dieses 
Biidsensors in Abhangigkeit wenigstens eines Messwertes wenigstens eines weiteren 
Bildsensor des Bildsensorsystems erzeugt. 

8. Verarbeitungseinheit nach Anspruch 7, dadurch gekennzeichnet, dass die 
Verarbeitungseinheit ein Einstellsignal fur wenigstens einen Belichtungsparameter erzeugt, 
wobei der Belichtungsparameter insbesondere der Gain und/oder der Offset und/oder die 
Integrationszeit ist. 

9. Verarbeitungseinheit nach einem der Anspruche 7 oder 8, dadurch gekennzeichnet, dass die 
Verarbeitungseinheit das Einstellsignal in Abhangigkeit wenigstens eines Messwertes 
erzeugt, wobei der Messwert ein Mafi fQr die Belichtung wenigstens eines Teils des Biides 
des wenigstens einen weiteren Biidsensors ist. 
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10. Verarbeitungseinheit nach einem der Anspruche 7 bis 9, dadurch gekennzeichnet, dass die 
Verarbeitungseinheit das Auftreten von wenigstens einem Bildfehler und/oder wenigstens 
einem Hardwarefehler als Fehlertyp iiberwacht. 

1 1. Computeqjrogramm mit Programmcode-Mitteln, um alle Schritte von jedem beliebigen der 
Anspriiche 1 bis 4 durchzufiihren, wenn das Programm auf einem Computer ausgefUhrt 
wird. 
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